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Abstract of EP1 288859 

The red eye detection method involves 
determining a value as a criterium for the 
presence of the defect, and which provides 
information on the presence of flash light when 
recording the image data. Preferably a flash 
marker in the film data serves as an indicator that 
a flash was using when recording the image. 
Alternatively, identification of artificial light, poor 
contrast, image analysis, heavy shadows etc. can 
indicate that a flash was used. 
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(54) Verfahren zum automatischen Erkennen von rote-Augen-Defekten in fotografischen 
Bilddaten 

(57) Die Erfindung betrifft ein Verfahren zum automatischen Erkennen von rote-Augen-Defekten in fotografischen 
Bilddaten. Als Kriterium fur das Vorliegen solcher Defektewird ein Wert ermittelt, der Aufschluss iiber das Vorhanden- 
sein von Blitzlicht bei der Aufnahme der Bilddaten gibt. 
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Beschreibung 

[0001 ] Die Erf indung betrifft ein Verfahren zum Erken- 
nen von rote-Augen-Defekten in fotografischen Bildda- 
ten. 

[0002] Derartige Verfahren sind aus verschiedenen 
Anmeldungen ! die sich mit digitaler Bildverarbeitung be- 
fassen, bekannt. 

[0003] Zur Detektion roter Augen existieren halbauto- 
matische Programme, bei denen der Benutzer bei ei- 
nem am PC dargestellten Bild eine Region markieren 
muss, in der die roten Augen enthalten sind. Innerhalb 
dieser markierten Region werden dann die roten Fehl- 
stellen automatisch erkannt, eine Korrekturfarbe, wel- 
che zur Helligkeit des Auges passt, wird zugewiesen 
und die Korrektur automatisch durchgefuhrt. 
[0004] Derartige Verfahren sind jedoch fur automati- 
sche Kopiergerate nicht geeignet, da an diesen viele Bil- 
der sehr schnell nacheinander bearbeitet werden mus- 
sen und keine Zeit ist, jedes einzelne Bild vom Benutzer 
anschauen und evtl. markieren zu lassen. 
[0005] Aus diesem Grund wurden fur die Verwendung 
in automatischen Kopiergeraten bereits vollautomati- 
sche Verfahren entwickelt. 

[0006] So beschreibtbeispielsweise die EP 0961225 
ein Programm zum Erkennen roter Augen in digitalen 
Bildern, welches m eh re re Schritte umfasst. Hier werden 
zunachst Gebiete detektiert, welche Hauttone aufwei- 
sen. Der nachste Schritt besteht darin, Ellipsen in diese 
detektierten Regionen mitHauttonen einzupassen. Nur 
Regionen, in die derartige Ellipsen eingepasst werden 
konnen, werden im weiteren Verlauf als Kandidatenre- 
gionen fur rote Augen betrachtet. Innerhalb dieser Re- 
gionen werden dann zwei rote-Augen-Kandidaten ge- 
sucht, deren Abstand — sobald sie ermitteit wurden — 
mit dem Abstand von Augen verglichen wird. Die als 
mogliche Augen detektierten Gebiete um die roten-Au- 
gen-Kandidaten werden nun mit Augentemplates ver- 
glichen, um zu verifizieren. dass es sich dabei tatsach- 
lich um Augen handelt. Falls auch die letzten beiden Kri- 
terien erfultt sind, wird davon ausgegangen, dass rote 
Augen gefunden wurden. Anschlieftend werden diese 
roten Augen korrigiert. 

[0007] Nachteilig an diesem Programm ist, dass ins- 
besondere die Vergleiche mit den Augentemplates sehr 
rechenzeitaufwendig sind, so dass es fur Hochlei- 
stungskopiergerate nicht geeignet ist. 
[0008] Aufgabe der Erfindung war es deshalb, ein 
Verfahren zum automatischen Erkennen roter Augen zu 
entwickeln, bei dem die Uberprufung der Bilddaten in 
einem Zeitraum stattfindet, der fur schnelle automati- 
sche Kopiergerate geeignet ist. 

[0009] Gelost wird diese Aufgabe gemaB der Erfin- 
dung durch ein Verfahren mit den Merkmalen von An- 
spruch 1. 

[0010] Weitere vorteilhafte Ausfuhrungsformen sind 
Bestandteil der Unteranspruche im Zusammenhang mit 
der Beschreibung und der Zeichnung. 



[0011] ErfindungsgemaB wird im Rahmen des Ver- 
fahrens zum Erkennen von rote-Augen-Defekten unter- 
sucht ; ob bei der Aufnahme der Bilddaten das Licht ei- 
nes Kamerablitzes dominiert hat. Das Dominieren von 
5 Blitzlicht ist eine Voraussetzung fur das Auftreten von 
rote-Augen-Defekten. 

[0012] Da es uberhaupt nur zu rote-Augen-Defekten 
im Bild kommt, falls bei einer Personenaufnahme das 
Licht des Blitzes am Augenhintergrund gespiegelt wird, 

10 ist dies ein sehr sicheres Kriterium. Direkt laBt sich das 
Fehlen eines Blitzes bei einer Aufnahme jedoch nur 
feststellen, wenn mittels der Kamera beim Aufnehmen 
des Bildes sog. Blitzmarker gesetzt wurden. Diese Mar- 
ker konnen von APS- oder digitalen Kameras gesetzt 

*5 werden und zeigen an, ob ein Blitz verwendet wurde 
Oder nicht. Falls ein Blitzmarker gesetzt wurde, der be- 
sagt, dass bei der Aufnahme kein Blitz verwendet wur- 
de, kann mit groBer Sicherheit davon ausgegangen 
werden, dass keine rote-Augen-Defekte im Bild auftre- 

20 ten. 

[0013] Bei der Mehrzahl der Bilder, bei denen jedoch 
kein derartiger Blitzmarker gesetzt wurde, kann nur in- 
direkt darauf geschlossen werden, ob eine Blitzaufnah- 
me vorliegt oder nicht. Dies ist beispielsweise anhand 

25 einer Bildanalyse feststellbar. In dieser konnen starke 
Schatten von Personen am Hintergrund gesucht wer- 
den, deren Kontur mit der Kontur des Gesichts uberein- 
stimmt, deren Flache jedoch eineandere Farbebzw. ei- 
ne andere Bilddichte aufweist als das Gesicht. Sobald 

30 solche sehrdominanten Schlagschatten auftreten, kann 
davon ausgegangen werden, dass mit grof3er Wahr- 
scheinlichkeit ein Blitz bei der Aufnahme verwendet 
wurde. 

[0014] Ein Anzeichen dafur, dass kein Blitz bei der 

35 Aufnahme verwendet wurde, ist es, wenn erkannt wird, 
dass es sich um ein sehr kontrastarmes Bild handelt. 
Ebenso deutet das Erkennen eines sog. Kunstlichtbil- 
des, also eines Bildes, das die typischen Farben einer 
Gluhlampenbeleuchtung oder Neonrohre aufweist, dar- 

40 auf hin, dass gar kein bzw. kein dominanter Blitz ver- 
wendet wurde. Ein Teil der Analyse, die zur Feststellung 
erfolgt, ob Blitzlicht verwendet wurde, kann bereits an- 
hand der sog. Prescandaten {den Daten aus der Vorab- 
tastung) vorgenommen werden. Ublicherweise wird 

45 beim Abtasten fotografischer Vorlagen vor dem eigent- 
lichen Abtastvorgang, der die Bilddaten ergibt, ein Pres- 
can durchgefuhrt, welcher eine Auswahl dieser Bildda- 
ten in viel geringerer Aufiosung ermitteit. Diese Pres- 
candaten werden hauptsachlich dazu verwendet, die 

50 Empfindlichkeit des Aufnahmesensors fur die Hauptab- 
tastung optimal einzustellen. Sie bieten sich jedoch 
auch an, beispielsweise das Vorliegen einer Kunstlicht- 
aufnahme oder einer kontrastarmen Aufnahme etc. 
festzustellen. 

55 [0015] Diese niedrig aufgelosten Daten eignen sich 
sehr gut zur Uberprufung von Ausschlusskriterien, da 
ihre Analyse aufgrund des geringen Datensatzes nicht 
viel Zeit in Anspruch nimmt. Solche Ausschlusskriterien 
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dienen dazu, rote-Augen-Defekte von vornherein aus- 
zuschlieBen, woraufhin das Verfahren zum Erkennen 
roter-Augen-Defekte automatisch abgebrochen werden 
kann. Dadurch kann zusatzlich vie) Rechenzeit gespart 
werden. Derartige Ausschlusskriterien konnen bei- 
spielsweise sein: das Vorliegen von Aufnahmen, bei de- 
nen sicher kein Blitzlicht verwendet wurde, Oder das 
Fehlen jeglicher groBerer Gebiete mit Hauttonen oder 
ein starkes Abfallen der Fouriertransformierten der Bild- 
daten , was auf das Fehlen jeglicher Detailinformationen 
im Bild - also ein vollig homogenes Bild — hindeutet. 
Auch aile anderen Kriterien, die zur rote-Augen-Erken- 
nung verwendet werden, sich beliebig schnell uberpru- 
fen lassen und mit groBer Sicherheit einen Ausschluss 
von Bildern ohne rote-Augen-Defekte bedingen. sind 
als Ausschlusskriterien verwendbar. So kann es auch 
ein Ausschlusskriterium sein, dass in der gesamten 
Bildinformation keine roten Oder uberhaupt keine Farb- 
tone vorkommen. Eines der vorteilhaftesten Ausschlus- 
skriterien ist aber das Fehlen von Blitzlicht bei der Auf- 
nahme, da dieses oftmals sehr zuverlassig und sehr 
schnell uberpruft werden kann. 

[001 6] Falls nur eine Abtastung der Bilder erfolgt oder 
nur hoch aufgclostc, digitalc Daten vorliegen, ist es vor- 
teilhaft, diese zum Uberprufen der Ausschlusskriterien 
zu nieder aufgelosten Daten zusammenzufassen. Dies 
kann durch Rasterung : Mittelwertbildung oder eine Pi- 
xelauswahl geschehen. 

[0017] Urn die Sicherheit der Aussage uber das Vor- 
liegen einer Blitzaufnahme bzw. das Fehlen von Blitz- 
licht bei der Aufnahme des Bildes zu erhohen, ist es vor- 
teilhaft, verschiedene der hier angegebenen Kriterien 
zu uberprufen und die bei Uberprufung der einzelnen 
Kriterien gewonnenen Ergebnisse zu einem Gesamter- 
gebnis und einer Aussage uber das Verwenden von 
Blitzlicht zusammenzufassen. Urn Rechenzeit zu spa- 
ren, ist es auch hier besonders vorteilhaft die Kriterien 
parallel zu analysieren. Die Auswertung kann ebenfalls 
anhand von Wahrscheinlichkeiten oder uber ein neuro- 
nals Netz erfolgen. 

[0018] Das Verwenden von Blitzlicht bei der Aufnah- 
me als Kriterium bzw. Voraussetzung fur das Vorhan- 
densein von rote-Augen-Defekten im Rahmen des Er- 
kennungsverfahrens zu verwenden : ist besonders vor- 
teilhaft, da es sich hierbei urn ein vergleichsweise ein- 
fach zu uberprufendes Kriterium handelt, welches aber 
sehr aussagekraftig ist. Dieses Kriterium kann anslelle 
von anderen, sehrzeitaufwandigen Kriterien verwendet 
werden . Da es bereits an den Filmzusatzdaten bzw. den 
stark reduzierten Bilddaten uberpruft werden kann, 
kann es unter Aufwendung von sehr geringer Rechen- 
kapazitat und — zeit cinfach uberpruft werden. Auf die 
unabhangige oder u. U. parallele Analyse von Anhalts- 
punkten bzw. Kriterien wird im Rahmen des Ausfuh- 
rungsbeispiels naher eingegangen. 
[0019] Weitere Einzetheiten und Vorteile der Erfin- 
dung ergeben sich aus den Unteranspruchen im Zu- 
sammenhang mit der Beschreibung eines Ausfuhrungs- 



beispiels, das anhand der Zeichnung eingehend erlau- 
tert wird. 

[0020] Die einzige Figurzeigt ein Ablaufschema eines 
Ausfuhrungsbeispiels des erfindungsgemaBen Verfah- 
5 rens. 

[0021] In der Figur wird anhand eines Flussdia- 
gramms eine vorteilhafte Ausfuhrungsform der Erfin- 
dung eriautert. 

[0022] Urn fotografische Bilddaten auf rote-Augen- 
10 Defekte hin untersuchen zu konnen, mussen die Bild- 
daten, wenn sie nicht ohnehin - z. B. von einer Digitai- 
kamera — digital vorliegen, zuerst an einer Abtastein- 
richtung, einem sog. Scanner, ermittelt werden. Hierbei 
ist es in der Regel vorteilhaft, in einer niedrig aufgelo- 
is sten Vorabtastung zuerst Filmzusatzdaten, wie bei- 
spielsweise den Magnetstreifen eines APS-Films, aus- 
zulesen und in einem groben Raster den Bildinhalt zu 
ermitteln. Fur derartige Vorabtastungen werden in der 
Regel CCD-Zeilen verwendet, wobei die Filmzusatzda- 
20 ten entweder mit derselben CCD-Zeile wie der Bildinhalt 
ausgelesen oder an einem eigenen Sensor erf asst wer- 
den. Die Filmzusatzdaten werden in einem Schritt 1 er- 
mittelt, sie konnen aberauch parallel mit den nieder auf- 
gelosten Bildinhaltsdaten erfasst werden, welche an- 
25 sonsten in einem Schritt 2 ermittelt werden. Die nieder 
aufgelosten Bilddaten konnen auch dadurch gewonnen 
werden, dass der Film hoch aufgelost abgetastet wird 
und dieser hoch aufgeldste Datensatz zu einem niedri- 
ger aufgelosten Datensatz zusammengefasst wird. Das 
30 Zusammenfassen kann beispielsweise dadurch ge- 
schehen, dass uber eine bestimmte Datenanzahl der 
Mittelwert gebildet wird oder dadurch, dass nur jeder x- 
te hoch aufgeloste Bildpunkt fur den nieder aufgelosten 
Bilddatensatz berucksichtigt wird. Anhand der Filmzu- 
35 satzdaten wird dann in einem Schritt 3 bzw. im ersten 
Datenauswertschritt entschieden, ob es sich urn einen 
SchwarzweiBfilm handelt. Falls es sich urn einen 
SchwarzweiBfilm handelt, wird das rote-Augen-Erken- 
nungsverfahren abgebrochen, der rote-Augen-Aus- 
40 schlusswert W RAA wird in einem Schritt 4 auf Null ge- 
setzt, die hoch aufgelosten Bilddaten werden ermittelt, 
falls sie nicht aus einem digitalen Datensatz ohnehin 
vorliegen, und die Bearbeitung der hoch aufgelosten 
Bilddaten mittels weiterer vorgesehener Bildverarbei- 
45 tungsverfahren wirdfortgesetzt. Ebenso wird verfahren, 
wenn in einem Pruf schritt 5 festgestel It wird, dass in den 
Filmzusatzdaten ein Blitzmarkerenthalten ist und dieser 
anzeigt, dass bei der Aufnahme des Bildes nicht geblitzt 
wurde. Sobald anhand eines derartigen Blitzmarkers 
so festgestellt wurde, dass bei der Aufnahme kein Blitz ver- 
wendet wurde, konnen im Bilddatensatz keine roten-Au- 
gen-Defekte vorliegen. Deshalb wird auch hier der rote- 
Augen-Ausschlusswert W RAA auf Null gesetzt, die hoch 
aufgelosten Bilddaten ermittelt und andere, weitere 
55 Bildverarbeitungsverfahren werden begonnen. Anhand 
der Ausschlusskriterien "SchwarzweiBfilm" und "kein 
Blitz bei der Aufnahme", welche sich aus den Filmzu- 
satzdaten ermitteln lassen, werden also von vornherein 
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Bilder. welche mil Sicherheit keine roten Augen aufwei- 
sen konnen. von dem rote-Augen-Erkennungsverfah- 
ren ausgcschlossen. Durch das Verwenden derartiger 
AusschUsskrilerien kann viel Rechenzeit gespart wer- 
den. da aul die ausgeschlossenen Bilder das weitere, 
aufwancigc rote-Augen-Erkennungsverfahren nicht 
mehr nngcwandt werden muss. 

[0023] In don folgenden Schritten werden weitere 
AusschUsskrilerien uberpruft, welche aus dem niedrig 
aufgelosten Bildinhalt abgeleitet werden konnen. So 
wird bci den verbleibenden Bildern aus deren nieder 
aUgciosien Bilddaten in einem Schritt 6 der Hautwert 
crmiticlt Hicdur werden in den Bilddaten in einem sehr 
groben faster Hauttone gesucht, welche ein Hinweis 
daraut s nd dr-ss sich aul der Fotografie uberhaupt Per- 
sonen behrden. Als wetterer Hinweis hierfur zahlt auch 
der in encrn Schritt 7 ermittelte Kontrastwert. In einem 
sehr konirrisiHrmen Bild kann ebenfalls davon ausge- 
gangen werden. dass keine Personen aufgenommen 
wurden. Es ist vorteilhaft, Hautwert und Kontrastwert in 
einem Schritt 8 zu einem Personenwert zusammenzu- 
fassen. Dabei ist es sinnvoll, eine Wichtung der Aus- 
schlusswene "Hautwert" und "Kontrastwert" vorzuneh- 
mcn. So kann bcispiclswcisc der Hautwert bei der Fra- 
ge ; ob Personen auf dem Bild vorhanden sind, ein gro- 
Beres Gewicht haben als der Kontrastwert. Die richtige 
Wichtung laBt sich anhand der Uberprufung mehrerer 
Bilder herausfinden, bzw. sie kann auch durch eine Be- 
arbeitung der Werte in einem neuronalen Netz erfolgen. 
Der Kontrastwert wird mit einem in Schritt 9 ermittelten 
Kunstlichtwert zusammengefasst welcher daruber Auf- 
schluss gibt. ob eine kunstliche Beleuchtung - wie bei- 
spielsweise eine Gluhbirne Oder Neonrohre - im Bild do- 
miniert hat, urn eine Aussage daruber zu gewinnen, ob 
die Aufnahme der Bilddaten von einem Kamerablitz do- 
miniert wurde. Dabei wird aus Kontrastwert und Kunst- 
lichtwert der Blitzwert in Schritt 10 gebildet. 
[0024] Sind Personen- und Blitzwert sehr gering, so 
kann davon ausgegangen werden, dass sich weder ei- 
ne Person auf dem Bild befindet noch eine Blitzaufnah- 
me gemacht wurde. Damit kann das Auftreten von rote- 
Augen-Defekten im Bild ausgeschlossen werden. Hier- 
fur wird aus Personenwert und Blitzwert in einem Schritt 
11 der rote-Augen-Ausschlusswert W RAA gebildet. Es 
ist nicht zwingend notwendig, dass die Ausschlusskri- 
terien "Personenwert" und "Blitzwert" zu einem einzigen 
Ausschlusswert zusammengefasst werden. Sie konnen 
ebenso als getrennte Ausschlusswerte betrachtet wer- 
den. Weiterhin ist vorstellbar, beliebige andere Aus- 
schlusskriterien zu uberprufen, welche einen Hinweis 
darauf geben, dass keine rote-Augen-Defekte in den 
Bilddaten vorlicgcn konnen. 

[0025] Wichtig bei der Wahl der Ausschlusskriterien 
ist es, darauf zu achten, dass die Uberprufung dieser 
Kriterien aufgrund der nieder aufgelosten Bilddaten 
moglich sein muss, da nur sinnvoll Rechenzeit gespart 
werden kann, wenn sehr wenige Bilddaten sehr schnell 
daraufhin untersucht werden konnen, ob ein rote-Au- 



gen-Erkennungsverfahren uberhaupt angewandt wer- 
den soli oder solche Defekte von vornherein ausge- 
schlossen werden konnen. Wurde die Uberprufung von 
Ausschlusskriterien an den hoch aufgelosten Bilddaten 

5 erfolgen, ware die Einsparung der Rechenzeit nicht so 
grolB, dass es sich lohnen wurde, bereits vor dem De- 
fekterkennungsverfahren zusatzlich Kriterien zu uber- 
prufen. In diesem Fall ware essinnvoller, gleich bei alien 
Aufnahmen ein rote-Augen-Erkennungsverfahren 

10 durchzufuhren. Werden hingegen die nieder aufgelo- 
sten Bildinhaltsdaten verwendet, urn Ausschlusskriteri- 
en zu uberprufen, kann diese Uberprufung sehr schnell 
erfolgen, so dass viel Rechenzeit gespart wird, da nicht 
bei jedem Bild das aufwandige rote-Augen-Erken- 
nungsverfahren anhand der hoch aufgelosten Daten 
vorgenommen werden muss. 

[0026] Falls sie noch nicht digital vorliegen, mussen 
in einem Schritt 12 nunmehr von alien Bildern die Daten 
des hoch aufgelosten Bildinhalts ermittelt werden. Dies 
20 erfolgt bei fotografischen Filmen in der Regel durch 
Scannen mit einem hoch aufldsenden Flachen-CCD. Es 
ist aber auch moglich, CCD-Zeilen zu verwenden oder 
entsprechende, in diesem Bereich gangige andere Sen- 
soren. 

25 [0027] Falls die Voranalyse ergeben hatte, dass der 
rote-Augen-Ausschlusswert sehr gering ist, wird davon 
ausgegangen, dass keine rote-Augen-Defekte auf dem 
Bild vorliegen konnen. Die weiteren Bildverarbeitungs- 
verfahren wie beispielsweise Verscharfung oder Kon- 

30 trastbearbeitung werden eingeleitet, ohne ein rote-Au- 
gen-Erkennungsverfahren an dem entsprechenden Bild 
vorzunehmen. Ergibt dagegen der Uberprufungsschritt 
13, dass rote-Augen-Defekte nicht von vornherein aus- 
geschlossen werden konnen, so werden die hoch auf- 

35 geldsten Bilddaten daraufhin uberpruft, ob bestimmte 
Voraussetzungen oder Anzeichen fur das Vorliegen von 
rote-Augen-Defekten vorhanden sind, es beginnt das 
eigentliche Defekt-Erkennungsverfahren. 
[0028] Diese Voraussetzungen und/oder Anzeichen 

40 werden vorteilhafterweise unabhangig voneinander ge- 
pruft. Um Rechenzeit zu sparen, ist es besonders vor- 
teilhaft, sie parallel zu prufen. So werden in einem 
Schritt 14 die hoch aufgelosten Bilddaten daraufhin un- 
tersucht, ob in ihnen weiBe Flachen zu finden sind. Zu 

45 derartigen weil3en Flachen wird ein Farbwert W FA in ei- 
nem Schritt 15 ermittelt, der ein MaB dafiir ist, wie rein- 
weiB diese weiBen Flachen sind. AuBerdem wird in ei- 
nem Schritt 1 6 ein Formwert W FO ermittelt, welcher an- 
gibt, ob diese ermittelten weiBen Flachen in etwa der 

so Form eines abgebildeten Augapfels oder einem Licht- 
reflex in einem Auge entsprechen konnen oder nicht. 
Farbwert und Formwert werden in einem Schritt 17 zu 
einem WeiBwert zusammengefasst, wobei auch eine 
Wichtung dieser Werte vorgenommen werden kann. 

55 Parallel dazu werden in einem Schritt 18 rote Flachen 
ermittelt, denen ebenfalls in den Schritten 19 und 20 
Farb- und Formwert zugewiesen werden. Hieraus wird 
fur die roten Flachen in einem Schritt 21 der Rotwert 
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ermittelt. Der Formwert bei roten Flachen bezieht sich 
darauf, ob die Form der ermittelten roten Flachen in et- 
wa der Form eines rote-Augen-Defekts entspricht. 
[0029] In einem weiteren. parallel zu untersuchenden 
Sch ritt 22 werden Schattenkonturen in den Bilddaten er- 
mittelt. Dies kann beispielsweise dadurch geschehen, 
dass nach parallel gleich verlaufenden Konturlinien ge- 
sucht wird : wobei eine dieser Linien hell, die andere 
aber dunkel ist. Derartige Doppelkonturlinien sind ein 
Anzeichen dafurdass der Schattenwurf einerLichtquel- 
le vorliegt. Wenn die HellVDunkeldifferenz besonders 
groB ist. kann davon ausgegangen werden, dass die 
den Schatten erzeugende Lichtquelle das Blitzlicht ei- 
ner Kamera war. Damit gibt der diesen Sachverhalt wi- 
derspiegelnde Schattenwert, welcher in einem Schritt 
23 ermittelt wird. Auskunft daruber, ob die Wahrschein- 
lichkeit fur einen Blitz hoch ist Oder nicht. 
[0030] In einem weiteren Schritt 24 werden die Bild- 
daten auf das Auflreten von Hautflachen hin untersucht. 
Sobald Hautflachen gefunden werden, wird von diesen 
ein Farbwert - also ein Wert, der daruber Auskunft gibt, 
wie nahe die Farbe der Hautflachen an einer Hautton- 
farbe liegt — in einem Schritt 25 ermittelt. In einem 
Schritt 26 wird parallel dazu ein GroBenwert bestimmt, 
welcher ein MaB fur die GroBe der Hautflachen ist. 
Ebenso parallel dazu wird in einem Schritt 27 das Sei- 
tenverhaltnis : also das Verhaltnis von langer zu kurzer 
Seite der Hautflache, ermittelt. Farbwert, GroBenwert 
und Seitenverhaltnis werden in einem Schritt 28 zu ei- 
nem Gesichtswert zusammengefasst, welcher ein MaB 
dafur ist. inwieweit die ermittelte Hautflache in Farbe, 
GroBe und Form einem Gesicht ahnelt. 
[0031] In einem Schritt 29 werden Wei Bwert, Rotwert, 
Schattenwert und Gesichtswert zu einem rote-Augen- 
Kandidatenwert W RAK zusammengefasst. Dabei kann 
davon ausgegangen werden, dass beim Vorliegen von 
weiBen Flachen, roten Flachen, Schattenkonturen und 
Hautflachen in digitalen Bilddaten die Wahrscheinlich- 
keit fur das Vorliegen von roten Augen sehr groB ist und 
die ermittelten roten Flachen als rote-Augen-Kandida- 
ten gewertet werden konnen, falls sie sich aufgrund ih- 
rer Form dazu eignen. Bei der Bildung dieses rote-Au- 
gen-Kandidatenwerts konnen noch weitere Bedingun- 
gen uber den Zusammenhang von WeiBwert, Rotwert 
und Gesichtswert eingebracht werden. So kann bei- 
spielsweise ein Faktor eingefuhrt werden, der Auf- 
schluss daruber gibt, ob rote und weiBe Flachen neben- 
einander liegen oder nicht. Ebenso kann berucksichtigt 
werden, ob rote und weiBe Flachen innerhalb der ermit- 
telten Hautflache liegen oder weit entfernt von ihr. Diese 
Zusammenhangsfaktoren konnen in den rote-Augen- 
Kandidatcnwcrt mit oingercchnct werden. Eine Alterna- 
tive zur Ermittlung des rote-Augen-Kandidatenwerts ist 
es, Farbwerte.. Formwerte : Schattenwert, GroBenwert, 
Seitenverhaltnis etc. gemeinsam mit Zusammenhangs- 
faktoren in ein neuronales Netz einzuspeisen und von 
diesem den rote-Augen-Kandidatenwert ausgeben zu 
lassen. 



[0032] In einem Schritt 30 wird schlieBlich der ermit- 
telte rote-Augen-Kandidatenwert mit einem Schwell- 
wert verglichen. Falls der Wert die SchweJIe uberschrei- 
tet, wird davon ausgegangen, dass rote-Augen-Kandi- 

5 daten im Bild vorliegen. In einem Schritt 31 wird uber- 
pruft, ob diese roten-Augen-Kandidaten tatsachlich ro- 
te-Augen-Defekte sein konnen. Hierbei konnen bei- 
spielsweise rote-Augen-Kandidaten und in re Umge- 
bung mit dem Dichteprofil von wirklichen Augen vergli- 

io chen werden, urn aufgrund von Ahnlichkeiten darauf zu 
schlieBen, dass die rote-Augen-Kandidaten sich tat- 
sachlich innerhalb eines aufgenommenen Auges befin- 
den. 

[0033] Eine weitere Moglichkeit der Uberprufung der 

is rote-Augen-Kandidaten ist es, jeweils zwei zusammen- 
passende Kandidaten mit annahernd gleichen Eigen- 
schaften zu suchen, welche zu einem Augenpaar geho- 
ren. Dies kann in einem folgenden Schritt 32 Oder auch 
allernalivzu Schritt 31 oder aber parallel dazu erfolgen. 

20 Falls dieser Uberprufungsschritt gewahlt wird, werden 
nur rote-Augen-Defekte in frontal aufgenommenen Ge- 
sichtern erkannt. Profilaufnahmen mit nur einem roten 
Auge konnen davon nicht erfasst werden. Da rote-Au- 
gen-Defekte aber im allgemeinen bei Frontalaufnah- 

25 men auftreten, kann dieser Fehler in Kauf genommen 
werden, urn Rechenzeit zu sparen. Falls zum Uberpru- 
fen die in den Schritten 31 und 32 vorgeschlagenen Kri- 
terien betrachtet werden, wird anhand dieser Kriterien 
ein Schritt 33 der Ubereinstimmungsgrad der gefunde- 

30 nen Kandidatenpaare mit Augenkriterien ermittelt. Im 
Schritt 34 wird der Ubereinstimmungsgrad mit einem 
Schwellwert verglichen, urn danach zu entscheiden, ob 
die rote-Augen-Kandidaten mit groBer Wahrscheinlich- 
keit rote-Augen-Defekte sind oder nicht. Falls keine gro- 

35 Be Ubereinstimmung festgestellt werden kann, muss 
davon ausgegangen werden, dass es sich um irgend- 
welche anderen roten Bildinhalte handett, welche kei- 
nesfalls zu korrigieren sind. In diesem Fall wird die Be- 
arbeitung des Bildes mit anderen Bildverarbeitungsal- 

40 gorithmen fortgesetzt, ohne eine rote-Augen-Korrektur 
vorzunehmen. 

[0034] Falls der Ubereinstimmungsgrad der Kandida- 
ten mit Augenkriterien jedoch relativ groB ist, wird in ei- 
nem weiteren Schritt 35 ein Gesichtserkennungsverfah- 

45 ren auf die digitalen Bilddaten angewandt, welches ein 
zu dem Kandidatenpaar passendes Gesicht suchen 
soli. Eine Paarbildung aus den Kandidaten hat dabei 
den Vorteil, dass die Orientierung eines moglichen Ge- 
sichts schon vorgegeben ist. Nachteilig ist — wie be- 

50 reits erwahnt — dass rote-Augen-Defekte in Profilauf- 
nahmen nicht erkannt werden. Falls dieser Fehler nicht 
in Kauf genommen werden soil, ist es jedoch auch mog- 
lich, zu jedem rote-Augen-Kandidaten ein Gesichtser- 
kennungsverfahren zu starten und ein zu diesem Kan- 

55 didaten moglicherweise passendes Gesicht zu suchen. 
Dies erfordert mehr Rechenzeit, fuhrt aber zu einem si- 
chereren Ergebnis. Falls in einem Schritt 36 kein zu ro- 
te-Augen-Kandidaten passendes Gesicht gefunden 



5 



BNSDOCID: <EP 12B8859A1_I_> 



9 



EP 1 288 859 A1 



10 



wird, muss davon ausgegangen werden, dass es sich 
bei den rote-Augen-Kandidaten nicht urn Defekte han- 
delt, das rote-Augen-Korrekturverfahren wird nicht an- 
gewandt, sondern weitere Bildverarbeitungsalgorith- 
men werden gestartet. Falls jedoch ein zu den rote-Au- 
gen-Kandidaten passendes Gesicht ermittelt werden 
kann. kann davon ausgegangen werden, dass es sich 
bei den rote-Augen-Kandidaten tatsachlich urn Defekte 
handelt, und diese werden in einem Korrekturschritt 37 
mit einern gangigen Korrekturverfahren korrigiert. Als 
zur Oberprufung von rote-Augen-Kandidaten geeigne- 
tes Gesichtserkennungsverfahren konnen mit Dichte- 
verlaufen arbeitende Verfahren verwendet werden, wie 
sie im Rahmen von Echtzeit-Personenuberwachungen 
Oder — Identitatskontrolle ublich sind. Prinzipiell ist es 
aber auch moglich : einfachere Verfahren wie Hautton- 
erkennung und Ellipsenfit zu verwenden. Diese sind je- 
doch fehleranfalliger. 



Patentanspruche 

1. Verfahren zum automatischen Erkennen von rote- 
Augcn-Dcfcktcn in fotografischen Bilddaten, da- 
durch gekennzeichnet, dass als Kriterium fur das 
Vorliegen solcher Defekte ein Wert ermittelt wird, 
der Aufschluss uber das Vorhandensein von Blitz- 
licht bei der Aufnahme der Bilddaten gibt. 

2. Verfahren nach Anspruch 1, dadurch gekenn- 
zeichnet, dass der Blitzmarker der Filmzusatzda- 
ten als Anhaltspunkt dafur dient. ob bei der Aufnah- 
me ein Blitz verwendet wurde. 



tersuchten Anhaltspunkte unabhangig voneinander 
untersucht werden. 

8. Verfahren nach Anspruch 7, dadurch gekenn- 
5 zeichnet, dass bei der Oberprufung mehrere der 

Anhaltspunkte parallel untersucht werden. 

9. Verfahren nach einem der vorhergehenden Anspru- 
che, dadurch gekennzeichnet, dass der fur die 

w Anhaltspunkte ermittelte Wert gemeinsam mit an- 
deren von uberpnuften Anhaltspunkten ermittelten 
Werten verwendet wird, urn anhand einer Gesamt- 
bewertung eine Entscheidung uber das Vorliegen 
von rote-Augen-Defekten zu treffen. 

15 

10. Verfahren nach Anspruch 9, dadurch gekenn- 
zeichnet, dass als Werte Wahrscheinlichkeiten er- 
mittelt werden. 

20 11. Verfahren nach Anspruch 9, dadurch gekenn- 
zeichnet, dass die Gesamtbewertung mitteis eines 
neuronalen Netzes erfolgt. 
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12. Verfahren nach einem der vorhergehenden Anspru- 
che, dadurch gekennzeichnet, dass die Feststel- 
lung, dass kein Blitzlicht verwendet wurde, als Aus- 
schlusskriterium dient, bei dem das Verfahren zur 
Erkennung roter-Augen -Defekte abgebrochen oder 
ubersprungen wird. 



3. Verfahren nach Anspruch 1, dadurch gekenn- 
zeichnet, dass das Erkennen einer Kunstlichtauf- 
nahme als Anhaltspunkt dafiir dient, dass Blitzlicht 
bei der Aufnahme des Bildes nicht die dominante 
Lichtquelle war. 

4. Verfahren nach Anspruch 1, dadurch gekenn- 
zeichnet, dass das Erkennen einer kontrastarmen 
Aufnahme als Anhaltspunkt dafiir dient dass kein 
Blitzlicht verwendet wurde. 

5. Verfahren nach Anspruch 1, dadurch gekenn- 
zeichnet, dass das Ergebnis einer Bildanalyse als 
Anhaltspunkt dafiir dient, ob bei der Aufnahme 
Blitzlicht verwendet wurde. 

6. Verfahren nach Anspruch 5, dadurch gekenn- 
zeichnet, dass das Vorhandensein starker Schlag- 
schatten im Bild als Anhaltspunkt dafur dient, dass 
Blitzlicht bei der Aufnahme verwendet wurde. 

7. Verfahren nach einem dervorhergehenden Anspru- 
che : dadurch gekennzeichnet, dass mehrere der 
zum Uberprufen der Verwendung von Blitzlicht un- 
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